PaDoc: Layout-Grounded Parallel Decoding for Document Parsing
PaDoc:布局引导的并行解码文档解析
🧭 多模态文档解析 · 并行解码加速
Tsinghua University · Wechat Vision, Tencent
将文档布局建模为分支结构,通过前缀条件分解实现并行解码,将自回归深度缩减至最长分支,突破速度瓶颈
📌 工作参考价值(4 点)
- 生成式推荐需同时产多条文案/建议时,可借鉴分支并行解码:在共享用户/上下文表示上并发生成多序列,降低端到端延迟。
- 训练阶段使用打包变长祖先注意力(Packed Variable-Length Ancestor Attention)保持多分支可见性,该技巧可迁移到部分自回归多序列生成模型的训练。
- 推理部署上,借助 vLLM 共享前缀缓存和并发请求能力优化批量生成:重用长期兴趣等公共前缀,减少重复计算,提升吞吐并降低 P95 延迟。
- 电商详情页解析等离线图文理解任务,PaDoc 的并行解码可大幅提升单卡吞吐,适合大批量商品图片结构化处理,可集成至内容审核、智能排版等流程。